#Amil Dravid
RexAA
官方認證
RexAA
2026/11/14
•

紐約大學教授炮轟 AI 玄學,伯克利團隊用 2 個token打響反擊戰

只需在大模型輸出開頭預先填充 2 個詞元,基礎模型的數學推理表現便能發生天翻地覆的躍遷。 在最新公開的基準測試中,基礎模型在 MATH-500 數學測試集上的精準率直接從 42% 飆升至 78%,當場反超了耗費天價算力完成完整強化學習的推理模型。 如果將訓練語料裡的習慣性口頭禪替換成毫無邏輯意義的單詞「chicken」,重新訓練並在輸出開頭預填充對應字元,模型在另一項數學測試集 GSM8K 上的成績便能從 2.2% 暴漲到 60.6%。 這項極具戲劇性的實驗結果,出自加州大學伯克利分校視覺與人工智慧實驗室博士生 Amil Dravid 參與的聯合研究團隊。
紐約大學教授炮轟 AI 玄學,伯克利團隊用 2 個token打響反擊戰
科技#Perplexity#Andrew Gordon Wilson#Amil Dravid